iT邦幫忙

第 11 屆 iThome 鐵人賽

DAY 4
0
自我挑戰組

自動化技術在生活與工作上的應用系列 第 4

[Day4].Selenium 自動化爬資料-2

  • 分享至 

  • xImage
  •  

昨天說到爬蟲,不過跟自動化好像沒關係!

今天要進一步地行駛自動化爬取網頁

進一步說一下,其實現在大多數技術都是處在半自動半人工

這種方式可以手動通過她問你是否滿18歲(誤xd)

不過其實程式改一下也可以(如下),其實可以接如果你需要做login或是需要做特別驗證的話拉
res = requests.get(url, cookies={'over18': '1'})

感覺youtube效果好像沒有別人做成GIF檔,可是我GIF的軟體開不起來..... 我再想想辦法
今天先到這裡,明日拚一個
讓我們來看看半自動化的自動化爬重會長怎樣
Yes

閱讀資料
https://ithelp.ithome.com.tw/articles/10202493
https://medium.com/@erika_dike/how-to-download-100-pictures-from-a-site-with-selenium-e23b7ecacb85


上一篇
[Day 3]Selenium 自動化爬資料
下一篇
[Day5].用Selenium自動化爬圖片
系列文
自動化技術在生活與工作上的應用29
圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

尚未有邦友留言

立即登入留言